118a77bc215ac73cd4e02e38622f497bcd861263
v2
- challenge
- Passage Retrieval
- submitter
- Anna
- submitted
- 2022-11-20 09:54:49.716562 UTC
- file basename
- out
test-A / 8a69952291e04d3a145497ee6b0f86244ee48155
| Metric | Score |
|---|---|
| NDCG@10 | 47.37 |
dev-0 / 34be7370ababd04d2ae330b3ecf891afdbf6530b
| Metric | Score |
|---|---|
| NDCG@10 | 19.59 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-A NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 1158331-1 1287330-0 571761-0 1272046-0 1052178-1 1257228-0 1052178-2 571766-1 1785080-1 2202450-1 | 0.00 |
| 2 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 750315-0 21753-5 934126-0 1775405-2 664688-3 162084-10 282823-0 11729-16 2853289-2 589037-3 | 0.00 |
| 3 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 1929638-1 1131567-3 1753674-4 109175-0 3572733-0 49767-0 3962344-0 1735904-0 2005270-0 1471875-0 | 0.00 |
| 4 | wiki-trivia W którym dniu tygodnia Robinson Crusoe spotkał Piętaszka? | 118590-4 2592188-2 | 1515321-0 1515321-1 1590509-0 118590-13 377886-0 2743010-0 1515296-1 118590-0 1814605-0 904580-0 | 0.00 |
| 5 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 3750050-0 3748706-0 4978480-17 2400947-0 3749417-0 1249181-0 572271-0 14103-0 1058932-17 1791387-0 | 0.00 |
| 6 | wiki-trivia Jak z łaciny nazywa się zmętnienie soczewki oka? | 49463-0 | 144165-2 1308285-14 4552948-0 1041967-13 744327-2 2333001-8 456571-11 42938-0 111119-7 4378287-5 | 0.00 |
| 7 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 941032-0 1741905-49 37916-0 181284-0 3710137-7 11289-3 162129-4 3710137-4 4095688-0 2767755-13 | 0.00 |
| 8 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 764160-15 1004592-0 1493593-0 2092410-0 779791-2 150129-3 4815174-22 3128880-1 1157368-1 489854-11 | 0.00 |
| 9 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 1956520-0 3311571-3 461101-1 770-24 692461-0 183444-1 2801925-136 201162-4 2739552-1 121015-8 | 0.00 |
| 10 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 547665-0 25911-0 2353370-0 116359-10 1756843-0 47564-0 2655442-0 1757857-0 2471402-0 1758633-0 | 0.00 |
| 11 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 4710309-0 1695117-0 5199359-5 1216081-0 354435-4 2468-20 3317324-0 2116275-0 76591-0 1263150-0 | 0.00 |
| 12 | wiki-trivia Sahara Zachodnia posiada duże złoża miedzi, fosforytów czy uranu? | 220899-2 1300844-0 | 1834-101 1827785-30 795-41 21201-33 24477-2 851203-7 3601661-31 48575-30 10256-47 1815040-30 | 0.00 |
| 13 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 169168-13 1823321-1 1099762-2 24742-3 183809-5 353543-6 399136-2 1423676-5 113867-4 183809-4 | 0.00 |
| 14 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 1173406-6 513522-0 3289-25 44772-6 3277-36 9830-0 557872-0 59224-0 3289-14 43730-13 | 0.00 |
| 15 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 4201896-1 2490097-0 2489221-0 1461623-5 89359-0 88970-3 1115392-0 111119-7 4890983-0 102637-1 | 0.00 |
| 16 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 3678011-6 928778-4 3004365-3 1518180-23 143218-4 28293-20 85675-14 23572-2 3305434-2 23992-398 | 0.00 |
| 17 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 1797224-0 318249-12 4096306-1 802949-47 5118056-1 500532-0 484992-44 4635429-0 4112366-0 46922-8 | 0.00 |
| 18 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 2174186-2 2789510-3 127513-1 355033-29 1668859-1 796633-2 456762-2 482383-1 2804-15 1538010-0 | 0.00 |
| 19 | wiki-trivia W którym roku odbył się po raz pierwszy festiwal na Woodstock? | 6857-0 61567-58 32954-0 2376129-0 1160069-0 | 768126-1 61567-20 1479063-0 4570743-2 1698605-23 712912-17 6857-11 1882813-1 1667715-0 897826-1 | 0.00 |
| 20 | wiki-trivia Kto napisał „Ziemię obiecaną” oraz „Chłopów”? | 491777-0 503711-0 6624-9 503711-67 | 291-112 3740698-27 620440-3 746926-59 1674604-4 1936591-10 746926-78 1266711-13 911716-1 4073523-4 | 0.00 |
| 21 | wiki-trivia Jak chciał dać swojej córce na imię węglarz z filmu „Miś”? | 138277-7 | 4139926-14 5052017-2 849168-2 65847-2 2228563-1 97586-15 1822660-9 5052021-0 138277-17 1541237-11 | 0.00 |
| 22 | wiki-trivia W którym roku wystrzelono pierwszego sztucznego satelitę ziemskiego? | 21622-0 7299-31 504860-13 198755-0 4839-2 | 64914-2 7325-22 7692-25 7816-29 7775-31 7643-29 5178916-1 7688-26 7437-33 764658-1 | 0.00 |
| 23 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 91329-156 1326878-16 20338-18 4167-55 1599890-1 424547-18 2314724-22 1695584-1 4659837-10 2352972-0 | 0.00 |
| 24 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 2239844-21 1919191-28 644625-23 1249108-5 1002955-29 4450256-0 524475-5 3169145-38 443919-0 531496-3 | 0.00 |
| 25 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 500485-360 1419330-22 145706-0 3601181-7 153994-26 1745196-29 473222-84 2402163-4 4634572-50 398192-21 | 0.00 |
| 26 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 314765-5 1658867-146 1856156-3 2528123-1 363695-7 2522637-7 3589396-12 3554232-13 2413148-2 2084835-5 | 0.00 |
| 27 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 2027875-9 597209-0 1193751-0 1209122-1 2028372-13 2027875-8 597206-1 2028372-0 4682682-0 1219119-0 | 0.00 |
| 28 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 193584-2 134896-1 2554487-3 1418508-339 4413539-2 516032-0 77017-7 4603710-210 7104-0 2048728-5 | 0.00 |
| 29 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 984901-17 43683-10 4541971-5 15195-9 1833033-6 2311468-5 43683-6 300796-0 7-74 1157-5 | 0.00 |
| 30 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 331182-4 17348-87 35040-24 1515517-91 185547-5 308840-5 665627-1 1108611-1 1305200-7 2835627-12 | 0.00 |
| 31 | wiki-trivia Jak miał na imię Makuszyński? | 49827-0 49827-8 49827-14 1509748-0 12060-7 | 49827-25 494808-8 3697404-3 3020565-27 5174157-11 415829-2 2234906-4 1044250-82 97004-33 187142-18 | 0.00 |
| 32 | wiki-trivia Czy w Polsce panował król o imieniu Ludwik? | 18470-0 11289-2 489028-1 650042-0 1227360-0 | 1465459-1 1066149-1 174123-6 2582104-0 2366981-3 1773446-0 174123-4 1898964-16 32410-0 25018-5 | 0.00 |
| 33 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 1823613-28 4798405-23 661639-8 1525907-0 1809008-0 89555-5 1810145-8 140803-37 2095461-1 2365549-3 | 0.00 |
| 34 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 159-92 2605129-9 3243471-12 2283748-3 1529019-4 2706007-2 134786-10 3674136-0 3470170-0 2815816-2 | 0.00 |
| 35 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 75643-15 136382-4 6149-33 874135-0 30332-1 2079167-0 30333-0 39001-5 15729-1 1133291-0 | 0.00 |
| 36 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 2070144-0 9576-11 1906305-0 2975809-0 2521418-0 6780-28 2130812-4 1746085-11 1309650-5 5237976-12 | 0.00 |
| 37 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 2462290-7 5246661-3 115521-7 25362-89 1897053-9 2383108-16 189807-31 6242-63 4816857-3 4170033-58 | 0.00 |
| 38 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 302733-30 274668-4 1269055-11 904414-61 39134-1 595338-1 1948960-3 4570607-2 4674879-8 32036-35 | 0.00 |
| 39 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 2828147-5 42400-11 291285-2 3144098-1 2735278-7 60570-8 209765-44 1417390-0 428616-7 4403981-12 | 0.00 |
| 40 | wiki-trivia W którym roku Otton III i Bolesław Chrobry spotkali się na zjeździe gnieźnieńskim? | 2048803-0 1930212-0 8196-0 44843-1 411720-13 | 20984-5 1643289-4 276455-1 913829-7 1643632-8 311578-2 7604-14 438857-4 1876386-10 1918-22 | 0.00 |